Any Trajectory Instruction
https://gyazo.com/4777592917e7b77967b559cf882ab942
https://anytraj.github.io/Project
https://github.com/bytedance/ATI?tab=readme-ov-filebytedance/ATI
入力した軌道で動画の動きをコントロールする
motion injector
https://gyazo.com/8f967c5a94e0a898369116ff6308101f
軌道指示モジュールは、点の軌道から潜在特徴を計算します。推論時、最初のフレーム（すなわち入力画像）における点の位置が与えられると、その位置の特徴をバイリニア補間を用いてサンプリングします。その後、その後の各フレームにおける、各可視点の対応する位置に対して空間ガウス分布を計算します。
実装
https://github.com/kijai/ComfyUI-WanVideoWrapper/kijai/ComfyUI-WanVideoWrapper
https://github.com/comfyanonymous/ComfyUI/pull/8874ComfyUIデフォルトで対応
関連
MotionCtrl
DragNUWA
VACE